Databricks Runtime for Machine Learning (Databricks Runtime ML) 是一個已經包含了機器學習相關的套件的 Databricks Runtime。Databricks Runtime ML 的版本是對應到 Databricks Runtime 的版本。例如,Databricks Runtime 12.2 LTS for Machine Learning 是建立在 Databricks Runtime 12.2 LTS 之上。
使用 Databricks Runtime ML Cluster 好處是
而且還有原本 Databricks 的優勢
文字敘述完了,來看看 Community Edition (CE) 和 Subscription Edition (SE) 在這部份的差異吧。
可以看到 Community Edition (CE) 只有一個 Databricks Runtime ML 版本。
而 Subscription Edition (SE) 則有多個版本可以選擇,包含 GPU 支援。
簡言之,Community Edition (CE) 就是提供個 Spark 環境可以用 Notebook 開發,但也僅只於此,其他功能像是 experienment、features、model、pipeline、workflow 等都要在 Subscription Edition (SE) 才有。之後會根據情形交互使用 CE/SE。
Reference: https://docs.databricks.com/en/runtime/mlruntime.html